意念所至,萬物皆應(yīng),這一幕看似來自科幻電影,宛如超能者的天賦,或是魔法世界的奇跡。在現(xiàn)實(shí)世界中,這種能力曾經(jīng)遙不可及,但隨著眼動追蹤技術(shù)的突破,這一幻想終于邁向現(xiàn)實(shí)。

2016年前后,初代VR/AR眼鏡和頭顯的問世,讓用戶得以進(jìn)入沉浸式的3D虛擬環(huán)境,體驗(yàn)身臨其境的感官刺激。然而,由于當(dāng)時的技術(shù)局限,仍然只能依靠手柄、控制器或頭部移動來操作虛擬世界,無法真正實(shí)現(xiàn)“以眼控物”。更令人遺憾的是,早期的設(shè)備易造成眩暈,交互方式也略顯生硬,距離真正的自然沉浸式體驗(yàn)仍有較大差距。

圖源@元時文化

如今,人們僅憑雙眼便可精準(zhǔn)操控虛擬空間,眼動儀能夠?qū)崟r捕捉眼球的移動軌跡,并將其轉(zhuǎn)化為交互指令,它不僅讓數(shù)字世界更加智能化,也讓人與虛擬環(huán)境之間的連接更加緊密。無論是在VR游戲、虛擬會議,還是遠(yuǎn)程醫(yī)療、智慧辦公等場景,眼動追蹤都讓交互變得更加直觀和高效。

不僅如此,該技術(shù)還能通過追蹤用戶的凝視點(diǎn),動態(tài)調(diào)整畫面渲染,極大降低VR使用時的暈眩感,使虛擬體驗(yàn)更加順暢自然。未來,或許我們真的可以僅憑眼神,便能在虛擬世界中自由穿梭,創(chuàng)造屬于自己的數(shù)字奇跡。

圖源@元時文化

在元宇宙的構(gòu)建過程中,注意力計算是優(yōu)化用戶體驗(yàn)的重要手段之一。

眼動儀能夠?qū)崟r追蹤用戶的凝視點(diǎn)、眼動軌跡以及瞳孔變化,從而計算出用戶的注意力分布情況。這種數(shù)據(jù)可以用于優(yōu)化虛擬環(huán)境的設(shè)計,例如在VR游戲中,系統(tǒng)可以根據(jù)用戶的凝視方向動態(tài)調(diào)整畫面細(xì)節(jié),降低不必要的計算負(fù)擔(dān),提高渲染效率。

此外,注意力計算還可以用于廣告投放的優(yōu)化,通過分析用戶對不同廣告元素的關(guān)注程度,實(shí)現(xiàn)精準(zhǔn)營銷。這不僅能夠提高廣告的投放效率,還能避免用戶因無關(guān)信息而分散注意力,從而提升整體的沉浸體驗(yàn)。

圖源@元某人

在元宇宙的人機(jī)交互方面,眼動儀的應(yīng)用極大地提升了交互的自然性和便捷性。傳統(tǒng)的交互方式依賴于手柄、觸控板或語音指令,而眼動追蹤技術(shù)則提供了一種更為直觀的交互方式。例如,在VR環(huán)境中,用戶可以通過凝視來選擇菜單項,而無需使用手柄進(jìn)行繁瑣的操作。這種“凝視選取”(Gaze-based Selection)技術(shù)已經(jīng)在多個VR設(shè)備中得到了應(yīng)用。

此外,眼動儀還可以結(jié)合眨眼和瞳孔收縮等生理信號,實(shí)現(xiàn)更豐富的交互方式。例如,在虛擬社交平臺中,用戶可以通過眨眼發(fā)送表情,或通過瞳孔變化傳遞情緒信息,從而增強(qiáng)虛擬環(huán)境中的情感交流。

圖源@元時文化

在應(yīng)用方向上,眼動儀在多個元宇宙相關(guān)的領(lǐng)域展現(xiàn)出了巨大的潛力。

在教育培訓(xùn)方面,眼動追蹤可以用于評估學(xué)生的注意力分布,從而優(yōu)化教學(xué)內(nèi)容。例如,在VR課堂中,系統(tǒng)可以實(shí)時監(jiān)測學(xué)生對不同知識點(diǎn)的關(guān)注情況,并根據(jù)數(shù)據(jù)調(diào)整教學(xué)節(jié)奏,提高學(xué)習(xí)效率。

在職業(yè)培訓(xùn)中,眼動儀可以用于模擬訓(xùn)練,例如飛行員訓(xùn)練、醫(yī)療手術(shù)模擬等,通過分析學(xué)員的注意力焦點(diǎn)來評估他們的操作熟練度,并提供個性化的反饋。

圖源@秦朔朋友圈

在醫(yī)療康復(fù)領(lǐng)域,眼動儀同樣發(fā)揮著重要作用。例如,對于腦損傷或中風(fēng)患者,眼動追蹤技術(shù)可以用于評估患者的認(rèn)知功能和視力恢復(fù)情況,并輔助康復(fù)訓(xùn)練。

對于患有自閉癥或注意力缺陷多動障礙(ADHD)的兒童,眼動數(shù)據(jù)可以用于評估他們的注意力模式,并設(shè)計個性化的干預(yù)方案。

元宇宙的虛擬環(huán)境提供了一個安全且可控的訓(xùn)練空間,使這些患者能夠在沉浸式環(huán)境中進(jìn)行康復(fù)訓(xùn)練,進(jìn)而提高康復(fù)效果。

圖源@浦東發(fā)布

在娛樂和內(nèi)容創(chuàng)作方面,眼動儀的應(yīng)用進(jìn)一步提升了用戶體驗(yàn)。在VR電影和游戲中,眼動追蹤技術(shù)可以用于“動態(tài)渲染”(Foveated Rendering),即系統(tǒng)僅對用戶凝視區(qū)域進(jìn)行高精度渲染,而對視野邊緣區(qū)域進(jìn)行低精度渲染,從而大幅降低計算成本,提高圖像質(zhì)量。

此外,在互動敘事中,眼動數(shù)據(jù)可以用于動態(tài)調(diào)整劇情發(fā)展。例如,在一款恐怖游戲中,系統(tǒng)可以根據(jù)玩家的眼動數(shù)據(jù)判斷他們的恐懼程度,并動態(tài)調(diào)整游戲節(jié)奏和情節(jié),以增強(qiáng)沉浸感和個性化體驗(yàn)。

圖源@ChatGPT

從商業(yè)價值角度來看,眼動儀的應(yīng)用不僅提高了元宇宙平臺的用戶粘性,還促進(jìn)了精準(zhǔn)營銷和商業(yè)模式的創(chuàng)新。在虛擬購物中,眼動追蹤可以用于分析消費(fèi)者的關(guān)注點(diǎn),并推薦最符合他們興趣的商品。

在廣告投放方面,品牌可以利用眼動數(shù)據(jù)優(yōu)化廣告內(nèi)容和位置,提高廣告的轉(zhuǎn)化率。同時,眼動追蹤還可以用于優(yōu)化用戶界面設(shè)計,提高用戶體驗(yàn),進(jìn)而增強(qiáng)用戶對元宇宙平臺的依賴度。

Pupil Labs Neon眼動追蹤系統(tǒng)消除了傳統(tǒng)上與眼動追蹤相關(guān)的障礙,無需設(shè)置,無需校準(zhǔn),戴上即采集,被試者采集條件不限(年齡、性別、有無眼妝、有無隱形眼鏡等)。

NeonNet深度學(xué)習(xí)注釋分類算法,即使在最苛刻的條件下,如白天黑夜、攀巖騎行等,也能提供前所未有的數(shù)據(jù)質(zhì)量。

技術(shù)原理:

1、Neon有兩個眼睛攝像頭,每只眼睛一個,運(yùn)行頻率為200Hz。

2、攝像頭的最佳位置靠近鼻子,以確保所有拍攝對象的眼睛的最大可見度并最大限度地減少遮擋。

3、您將始終可以訪問所有原始數(shù)據(jù)、中間數(shù)據(jù)和最終數(shù)據(jù),無需特殊許可證。

軟件參數(shù):

1、Neon Companion應(yīng)用程序記錄眼動追蹤數(shù)據(jù)并實(shí)時監(jiān)控實(shí)驗(yàn)。

2、Neon Companion應(yīng)用程序提供注視數(shù)據(jù)、場景視頻和眼睛視頻的實(shí)時預(yù)覽。輕松管理主題并使用模板添加元數(shù)據(jù)。立即直接在設(shè)備上播放錄音并上傳至Pupil Cloud。

3、Pupil Cloud中的高級注視映射和場景理解算法可安全存儲和分析數(shù)據(jù)

4、通過本地WiFi將數(shù)據(jù)傳輸?shù)饺魏尉W(wǎng)絡(luò)瀏覽器,遠(yuǎn)程控制您的所有設(shè)備:開始和停止錄音、添加事件注釋等。

5、Pupil Cloud是基于網(wǎng)絡(luò)的眼動追蹤平臺,用于數(shù)據(jù)物流、分析和可視化。利用云計算能力來幫助深入了解您的眼動追蹤數(shù)據(jù)集。

6.錄音可以自動上傳到您的Pupil Cloud云帳戶。

7、Pupil Cloud可以讓您輕松地與協(xié)作者共享數(shù)據(jù),同時保持完全的訪問控制。存儲符合GDPR要求并保護(hù)隱私。

8、Pupil Cloud提供了一系列工具,可以完全自動化傳統(tǒng)上

勞動密集型任務(wù),借助參考圖像映射器,您可以簡單地獲取刺激的參考圖像,并使用復(fù)雜的算法將視線完全自動映射到它,自動將視線映射到環(huán)境中的特征/物體上。

9、臉部映射器:檢測場景視頻中的面部并將注視數(shù)據(jù)映射到它們上。

10、標(biāo)記映射器:使用April Tags定義曲面,將視線映射到這些表面上。

11、凝視疊加:自定義凝視、注視和場景視頻的可視化。批量渲染視頻部分以進(jìn)行定性分析和可視化。

隨著“可用眼代替手”的場景需求日益增多,眼動追蹤技術(shù)還有更多可以大顯身手的地方。相信,在Pupil Labs Neon眼動追蹤系統(tǒng)的助力下,元宇宙的體驗(yàn)將更上一層樓。

未來這一技術(shù)將進(jìn)一步推動虛擬世界的沉浸感、交互性和智能化水平的發(fā)展,為人類的數(shù)字化體驗(yàn)帶來革命性的變革。在元宇宙的宏偉藍(lán)圖下,眼動儀無疑將成為連接虛擬與現(xiàn)實(shí)的重要橋梁,為未來的數(shù)字世界開辟更加廣闊的可能性。

圖源@元宇宙數(shù)字藝術(shù)